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BESCHREmUNG 

Vorrichtung und Verfahren zur kombinierten Darstellung von Angiogrammen und aktu- 
ellen Rontgenaufnahmen 

Die Erfindung betrifft eine Vorrichtung und ein Verfahren zur kombinierten Darstellung 
von einer aktuellen Abbildung eines Objektes, das sich in einem Wegenetz wie insbeson- 
dere dem Gefafisystem eines Patienten befindet, und einer Kartenabbildung des Wegenet- 
zes. 

Die ^Combination einer aktuellen Abbildung eines Objektes und einer Kartenabbildung der 
Objektumgebung wird beispielsweise bei der Navigation eines Katheters durch das 
Gefafisystem eines Patienten vorgenommen. Nachfolgend soil daher die zugrundeliegende 
Problematik am Beispiel einer Heizkatheter-Untersuchung erlautert werden, wobei die 
vorliegende Erfindung jedoch nicht auf dieses Anwendungsgebiet beschrankt ist. Bei den 
iiblicherweise eingesetzten Systemen fiir kardiale EingrifFe werden statische Angiogramme 
und aktuell aufgenommene fluoroskopische Abbildungen auf zwei verschiedenen Monito- 
ren nebeneinander dargestellt. Angiogramme sind dabei Aufiiahmen des Gefafisystems, in 
welchen die Gefafie z.B. durch Kontrastmittelgabe hervorgehoben dargestellt sind. Es bleibt 
bei diesen Systemen dem behandelnden Arzt uberlassen, die auf der aktuellen Aufhahme 
erkennbare Position eines Objektes wie beispielsweise eines Katheters oder eines 
Fuhrungsdrahtes der Kartenabbildung des Gefafisystems zuzuordnen, das heifit die beiden 
nebeneinander dargestellten Monitorbilder in Gedanken zu iiberlagern. 

Aus der JP-A-2002-237996 ist in diesem Zusammenhang eine Vorrichtung bekannt, bei 
welcher eine aktuelle fluoroskopische Abbildung und eine statische Gefafikarte auf demsel- 
ben Monitor uberlagert werden. Problematisch bei derartigen Oberlagerungen ist, dass sich 
aufgrund einer Gesamtbewegung des Patienten sowie des Herzschlags und der Atmung die 
Lage und Form von Organen in den aktuellen Abbildungen fortlaufend verandern, so dass 
zum Teil erhebliche geometrische bzw. anatomische Abweichungen zvsdschen den iiberla- 
gerten Abbildungen bestehen. Zur Minderung dieses Problems konnen Datenbanken mit 
statischen Gefafikarten aus verschiedenen Phasen des Herz- und/oder Atmungszyklus ver- 
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wendet werden, um mit Hilfe eines Elektrokardiogramms (EKG) und/oder der gemessenen 
Atemphase einer aktuellen fluoroskopischen Abbildung die hieizu am besten passende 
statische Gefafikarte (aus derselben oder einer ahnlichen Herz- bzw. Atmungsphase) zuzu- 
ordnen. Auch bei Einsatz solcher fortgeschrittener Methoden verbleiben indes geometriscbe 
5 Abweichungen zwischen den tiberlagerten Abbildungen, die den optischen Eindruck und 
damit die Brauchbarkeit der Oberlagerung erheblich storen konnen. Ferner ist auch fur 
Korperteile, die keiner zyklischen Eigenbewegung unterliegen (z.B. Kopf, Extremitaten), 
die Qualitat der Oberlagerung gering, wenn Kartenaufnahme und interventiondle 
Bildgebung zeitlich getrennt erfolgen. Denn zwischen den Aufhahmen sind Patientenbe- 
1 0 wegungen zumeist unvermeidlich, und auch die Reprodukrion der Bildgeometrie ist me- 
chanisch begrenzt. 

Bessere Oberlagerungen von aktuellen Aufhahmen und Kartenabbildungen kdnnten prin- 
zipiell durch Transformationen erzielt werden, die gemeinsame Bildinhalte zur Dberde- 

1 5 ckung bringen. Solche als Multimodalitatenregistrierung in der Literatur bekannte Verfah- 
ren sind in obigen Fallen jedoch in der Regel nicht anwendbar, da die Kartenabbildung des 
Wegenetzes und die aktuelle Aufhahme eines Objektes im Wegenetz keine relevanten ge- 
meinsamen Bildinhalte haben. Insbesondere stimmen die Objekte im Wegenetz (z.B. Ka- 
theter, Fuhrungsdraht) weder in Form noch Erscheinungsbild mit dem Wegenetz selbst 

20 (Kontrastmittelgefullte BlutgeMe) iiberein. 

Vor diesem Hintergrund war es eine Aufgabe der vorhegenden Erfindung, Mittel zur ver- 
besserten, echtzeitfahigen kombinierten Darstellung einer aktuellen Abbildung eines Ob- 
jektes und einer Kartenabbildung des Wegenetzes, in dem sich das Objektes aufhalt, be- 
25 reitzustellen. 

Diese Aufgabe wird durch eine Vorrichtung mit den Merkmalen des Anspruchs 1 sowie 
durch ein Verfehren mit den Merkmalen des Anspruchs 1 1 gelost. Vorteilhafte Ausgestal- 
tungen sind in den Unteranspruchen enthalten. 

30 

Die erfindungsgemafie Vorrichtung dient der kombinierten Darstellung von einer Abbil- 
dung eines Objektes, das sich in einem Wegenetz beHndet, und einer Kartenabbildung des 
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(insbesondere fo rm veranderlichen) Wegenetzes. Die erstgenannte Abbildung wird nachfol- 
gend als "aktuelle Abbildung" bezeichnet, ohne dass hiermit eine Einschrankung in Bezug 
auf bestimmte Zeitablaufe verbunden sein soli. Auch hinsichtlich der Dimensionality der 
akcuellen Abbildung und der Kartenabbildung (ID, 2D, 3D, 4D, ...) bestehen keine 
5 grundlegenden Einschrankungen. Bei dem Objekt kann es sich z.B. urn einen Katheter 
beziehungsweise eine Intervenuonseinrichtung (Fuhrungsdraht, Stent, Ballon, etc.) an 
einem Katheter und bei dem Wegenetz entsprechend urn das GefafSsystem eines Patienten 
handeln. Das Objekt kann jedoch auch beispielsweise eine im Magen-Darm-Trakt eines 
Patienten befindliche Kapsel sein, oder es kann eine nicht-med izt nische Anwendung vor- 

10 liegen. Typisch ist, dass sich das Objekt nur entlang der durch das Wegenetz vorgegebenen 
Bahnen bewegen kann. Die Kartenabbildung stellt vorzugsweise das "Wegenetz hervorge- 
hoben dar. Beispielsweise kann es sich bei der Kartenabbildung tun ein Angiogramm han- 
deln, welches vom Gefafisystem eines Patienten unter Kontrastmittelgabe angefertigt wor- 
den ist. Die Vorrichtung enthalt eine Datenverarbeitungseinrichtung, welche dazu einge- 

15 richtet ist, die folgenden Schritte auszuflihren: 



a) In einer Kartenabbildung das Wegenetz durch eine geeignete Segmentierung zu 

erkennen. Unter einer Segmentierung wird dabei in iiblicher Weise die Zuordnung 
von Bildpunkten zu verschiedenen Klassen beziehungsweise Objekten verstanden. 
20 Im vorUegenden Falle kann die Segmentierung insbesondere fur jeden Bildpunkt 

der Kartenabbildung bestimmen, ob er zu dem Wegenetz gehort oder nicht. Die 
Segmentierung kann vollautomatisch oder gegebenenialls auch semi-automatisch, 
dJi. durch interaktiven EingrifF eines Benutzers, erfolgen. 

25 b) Aus dem vorstehend genannten Segmentierungsergebnis Hilfsinformationen zu 

berechnen und im Speicher der Datenverarbeitungseinrichtung abzulegen, aus de- 
nen zu jeder in Frage kommenden Lage eines Objektes im Bild eine Transforma- 
tion, die Objekt und Wegenetz in Obereinstimmung bringt, in Echtzeit bestimmt 
werden kann. Welche Lagen des Objektes "in Frage kommen", richtet sich in erster 

30 Linie nach der zugrundeliegenden Anwendung; im weitest gehenden Falle konnen 

alle auf der Bildflache moglichen Lagen als in Frage kommend angesehen werden. 
In Abhangigkeit vom eingesetzten Verfahren in Schritt d) wird in den Hilfsinfor- 
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mationen vorab die notige Information bestimmt, urn zu den moglichen Lagen ei- 
nes Objektes im Bild schnellstmoglich den nachsten plausiblen Ort im Wegenetz 
auifinden zu konnen. 

Die Hilfsinformationen konnen insbesondere die Form einer (Hilfs-) Abbildung 
5 der Region des Wegenetzes haben. Zu einer gegebenen Lage eines Objektes konnen 

dann an der entsprechenden Stelle der Hilfcabbildung unmittelbar Informationen 
entnommen werden, die zur Bestimmung einer Transformation in Echtzeit 
benotigt werden. 

10 c) Aus der aktuellen Abbildung ein relevantes Objekt, das sich im Wegenetz befindet, 
zu segmentieren. Dass das Objekt sich im Wegenetz befindet, geht dabei typi- 
scherweise nicht aus der aktuellen Abbildung hervor, sondern beruht auf den Rah- 
menbedingungen der zugrundeliegenden Anwendung. 

Mit den Hilfsinformationen aus Schritt b) Transformationen der Kartenabbildung 
und der aktuellen Abbildung zu ermitteln, so dass bei Oberlagerung der transfbr- 
mierten Kartenabbildung mit der transformierten aktuellen Abbildung das Bild des 
Objektes im Wegenetz der transformierten Kartenabbildung zu liegen kommt. Eine 
der genannten Transformationen, z.B. diejenige der aktuellen Abbildung, wird 
typischerweise durch die Identitat definiert, so dass nur die Kartenabbildung einer 
"echten" Transformation unterworfen wird. Die Transformationen konnen im 
Obrigen beliebig, also insbesondere linear oder nichtlinear sein. Insbesondere kann 
es sich urn eine Translation, eine Rotation und/oder eine Skalierung handeln. 

25 Mit der beschriebenen Vorrichtung lasst sich eine auf einem Objekt wie etwa einem Ka- 
theter basierende Justierung der Uberlagerung einer aktuellen Abbildung und einer Kar- 
tenabbildung erreichen, wobei die Zwangsbedingung ausgenutzt wird, dass sich das beo- 
bachtete Objekt jederzeit im Wegenetz befinden muss. Die zur Uberlagerung gebrachten 
Abbildungen werden daher so transformiert, dass das auf der Kartenabbildung dargestellte 

30 Wegenetz iiber dem auf der aktuellen Abbildung dargestellten Objekt liegt. Auf diese 
Weise wird Registrierung auf der Basis von Bildinhalten (Gefafi, Katheter etc) erreicht, 
und es lassen sich die fur einen Benutzer besonders irritierenden Fehler vermeiden, bei 



15 d) 
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denen ein interessierendes Objekt nicht oder nicht exakt im Wegenetz liegt. Des Weiteren 
ist fur die Vorrichtung von Bedeutung, dass zu der verwendeten Kartenabbildung jeweils 
vorab Hilfsinformationen berechnet werden, die Informationen fiber das Wegenetz ent- 
halten und diese z.B. auf die gesamte Bildflache ausdehnen, damit sie wahrend des spateren 
5 Eingriffs unmittelbar abrufbar sind. Dies ermoglicht schliefilich eine Echtzeitfahigkeit der 
Oberlagerung, welche unabdingbare Vorraussetzung fur einen hohen klinischen Nutzen der 
Vorrichtung ist. 

Wie bereits erwahnt wurde, kann es sich bei den Hilfsinformationen insbesondere urn eine 
10 oder mehrere Abbildungen der Region des Wegenetzes handeln. Diesbezuglich umfassen 
die Hilfsinformationen vorzugsweise eine Distanzabbildung in Bezug auf das Wegenetz, 
welche aus der jeweiligen Kartenabbildung durch eine Distanztransformation gewonnen 
wird. Eine Distanztransformation ist eine aus der digitalen Bildverarbeitung bekannte 
Operation (vgl. Jahne, Digitale Bildverarbeitung, 5. Auflage, Kap. 18, Springer Verlag 
15 Berlin Heidelberg, 2002). Ein Bildpunkt der Distanzabbildung kann dabei insbesondere 
eine Information daruber enthalten, in welche Richtung und/oder in welcher Entfernung 
von diesem Punkt aus gesehen ein bestimmtes Segmentierungsobjekt vorliegt. Eine solche 
Distanzabbildung eignet sich in besonderem Mafie fur die schnelle Ermitdung der erfor- 
derlichen Transformationen, da sie fur jeden Bildpunkt die Grofie der notwendigen Ver- 
20 schiebung ins Wegenetz implizit enthalt. In den wichtigen Anwendungsfallen, in denen die 
Kartenabbildung vorab bekannt ist, kann die zugehorige Distanzabbildung im voraus 
berechnet und in einem Speicher hinterlegt werden. Dies ermoglicht es spater, die Berech- 
nung der Transformationen wahrend eines laufenden Eingriffs in Echtzeit durchzufiihren. 

25 Gemafi einer bevorzugten Ausgestaltung der Vorrichtung ist die Datenverarbeitungsein- 
richtung dazu eingerichtet, die folgenden Einzelschritte auszufiihren: 

bl) Ermitdung der Lage des Bildes des Objektes in der aktuellen Abbildung. Zum Bei- 
spiel kann durch eine Segmentierung die Lage eines Katheters beziehungsweise sei- 
30 ner Spitze in einer fluoroskopischen Rontgenaufhahme bestimmt werden. Das 

Segmentierungsergebnis kann aufier einem einzelnen Punkt auch ein ganzes Objekt 
enthalten, das in der tiberlagerten Darstellung bestmoglich im Wegenetz liegen soli 
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(eine vollstandige Dbereinstimmung ist bei schnellen, starren Transformations 
insbesondere bei biologischen Wegenetzen nicht immer moglich). 

cl) Ermitdung der kiirzesten Verschiebung, welche die Lage in der Distaiizabbildung, 
5 welche zur vorstehend genannten Lage des Objektbildes in der aktuellen Abbildung 

korrespondiert, bestmoglich in das Wegenetz uberfuhrt. Das heifit, es wird zu- 
nachst die korrespondierende Lage des Objektbildes in der DistanzabbUdung be- 
stimmt, die sich ergibt, wenn die Lage des Objektbildes in der aktuellen Abbildung 
"ein zu eins" beziehungsweise gemafi den aus Aufiiahmeparametern bekannten ge- 

10 ometrischen Beziehungen zwiscben der aktuellen Abbildung und der Kartenabbil- 

dung ubertragen wird. In der Regel wird diese korrespondierende Lage ganz oder 
teilweise aufierhalb des Wegenetzes liegen, da ein Wegenetz wie z.B. das Gefafisys- 
tem einer standigen Verschiebung und Verformung unterliegt und daher auf der 
Kartenabbildung und der aktuellen Abbildung in der Regel nicht an gleicher Stelle 

1 5 und in gleicher Konfiguration vorliegt. 

c2) Bestimmung einer Transformation der Kartenabbildung und/oder der aktuellen 
Abbildung, welche die vorstehend genannte Verschiebung unuasst. Insbesondere 
kann diese Transformation die Verschiebung global auf eine gesamte Abbildung 
20 ausdehnen. Die Verschiebung kann jedoch auch Unear oder nichtlinear so fortge- 

setzt werden, dass bestimmte Randbedingungen, beispielsweise die Invarianz der 
Bildrander, erfullt sind. 



Bei einer bevorzugten Ausfuhrung der Vorrichtung ist die Datenverarbeitungseinrichtung 
25 dazu eingerichtet, eine Segmentierung des Wegenetzes in der Kartenabbildung vorzuneh- 
men und dabei jedem Bildpunkt der Kartenabbildung eine Wahrscheinlichkeit dafur zu- 
zuordnen, dass er zum Wegenetz gehort. Das heifit, dass eine wahrscheinUchkeitsbasierte 
Segmentierung vorgenommen wird, bei welcher die Bildpunkte nicht scharf in genau eine 
von zwei Klassen (zum Objekt gehorig oder nicht) einsortiert werden, sondern dass nur 
30 Wahrscheinlichkeiten fiir eine Zugehorigkeit vergeben werden. Dieses Vorgehen wird ins- 
besondere der Situation bei der Verarbeitung medizinischer Daten besser gerecht, da sich 
dort aufgrund der Komplexitat der dargestellten Strukturen sowie der begrenzten Bildqua- 
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litat in der Regel keine wixklich sichere Entscheidung fiber die Zugehorigkeit zu einem 
Gefafi oder dergleichen treflfen lasst. Gleichzeitig kann durch die wahrscheinlichkeitsba- 
sierte Segmentierung auch ein aussagekraftiges Mafi fiir die Zuverlassigkeit eines erhaltenen 
Ergebnisses definiert werden. 

5 

Die Vorrichtung kann insbesondere eine bildgebende Einrichtung wie beispielsweise eine 
Rontgenapparatur und/oder ein MRI-Gerat enthalten, mit welcher die aktuelle Abbildung 
des Objektes erzeugt werden kann. Weiterhin kann die bildgebende Einrichtung dazu die- 
nen, auch die Kartenabbildungen des Aufenthaltsbereiches des Objektes zu erzeugen. Eine 
10 derartige Vorrichtung eignet sich insbesondere zur Navigation eines Katheters bei medizi- 
nischen EingrifFen. Die Vorrichtung kann auch mehr als eine bildgebende Einrichtung 
enthalten, z.B. eine Rontgenapparatur und ein MRI Gerat, so dass die aktuelle Aufhahme 
und die Kartenabbildung(en) von verschiedenen Modalitaten stammen konnen. 

15 Gemafi einer Weiterbildung der Vorrichtung enthalt diese einen Speicher zur Speicherung 
einer Anzahl von Kartenabbildungen, wobei die Kartenabbildungen gema£ einem variie- 
renden Zustand des Wegenetzes klassifiziert sind. In diesem Falle ist es moglich, unter den 
mehreren Kartenabbildungen fur die vorzunehmende Kombination eine optimale Karten- 
abbildung auszuwahlen. 

20 

Die Vorrichtung enthalt ferner vorzugsweise eine Sensoreinrichtung zur Erfassung min- 
destens eines Parameters, welcher einen variierenden Zustand des Wegenetzes des Objektes 
beschreibt. Insbesondere kann die Sensoreinrichtung dazu eingerichtet sein, ein Elektro- 
kardiogramm und/oder den Atmungszyklus eines untersuchten Patienten zu erfassen. Eine 
25 solche Sensoreinrichtung kann in Verbindung mit dem vorstehend erwahnten Speicher fur 
eine Anzahl von Kartenabbildungen eingesetzt werden, urn einerseits die Klassifikation der 
gespeicherten Kartenabbildungen nach dem zugehorigen Zustand des Wegenetzes vorzu- 
nehmen und urn andererseits den zur aktuellen Abbildung gehorenden Zustand des We- 
genetzes zu ermitteln. 

30 

In Verbindung mit der oben genannten, einen Speicher enthaltenden Ausfiihrungsform der 
Vorrichtung kann die Datenverarbeitungseinrichtung weiterhin dazu eingerichtet sein, aus 
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dem Speicher der Vorrichtung diejenige Kartenabbildung auszuwahlen, deren "Index" bzw. 
zugehoriger Zustand des Wegenetzes bestmoglich zum Zustand des Wegenetzes passt, 
welcher wahrend der Aufhahme der aktuellen Abbildung vorlag. Wenn zum Beispiel der 
Speicher mehrere Kartenabbildungen des Gefafisystems eines Patienten zu verschiedenen 
5 Phasen des Herzzyklus enthalt, kann hieraus diejenige ausgewahlt werden, die aus derselben 
Phase des Herzzyklus wie die aktuelle Abbildung stammt. Auf diese Weise ist es moglich, 
parametxisierbare und insbesondere zyklische Eigenbewegungen des Wegenetzes zu 
berucksichtigen und die aktuelle Abbildung von vornherein nur mit einer moglichst gut 
passenden Kartenabbildung zu kombinieren. 

10 

Die Vorrichtung kann insbesondere eine mit der Datenverarbeitungseinrichtung gekop- 
pelte Anzeigevorrichtung enthalten, auf welcher die transformierte Kartenabbildung ganz 
oder ausschnittsweise der transformierten aktuellen Abbildung oder einem Ausschnitt 
hiervon iiberlagert dargestellt wird. Im Rahmen einer Katheteruntersuchung kann dann 
15 zum Beispiel ein Arzt auf dem Monitor fluoroskopische Lifebilder des Katheters 

beobachten, in denen ihm gleichzeitig die Gefafistruktur urn den Katheter herum als 
Ausschnitt einer Gefafikarte angezeigt wird. 

Die Erfindung betriflt ferner ein Verfahren zur kombinierten Daxstellung einer aktuellen 
20 Abbildung eines Objektes, das sich in einem Wegenetz befindet, und einer Kartenabbil- 
dung des Wegenetzes, umfassend die folgenden Schritte: 

a) Segmentierung des Wegenetzes in der Kartenabbildung; 

b) Berechnung und Speicherung von Hilfsinformationen aus dem Segmentierungser- 
25 gebnis, wobei aus den Hilfeinformationen zu jeder in Frage kommenden Lage eines 

Objektes im Bild eine Transformation, die Objekt und Wegenetz in Obereinstim- 
mung bringt, in Echtzeit bestimmt werden kann; 

c) Segmentierung eines relevanten Objektes, das sich im Wegenetz befindet, aus der 
aktuellen Abbildung; 

30 d) Ermitdung von Transformationen der Kartenabbildung und der aktuellen Abbil- 
dung unter Verwendung der Hilfeinformationen, so dass bei Oberlagerung der 
transformierten Kartenabbildung mit der transformierten aktuellen Abbildung das 
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Bild des Objektes im Wegenetz der transformierten Kartenabbildung zu liegen 
kommt. 

Das Verfahren implementiert in allgemeiner Form die Schritte, die mit einer Vorrichtung 
der oben beschriebenen Art ausfuhrbar sind. Zur Erlauterung der Einzelheiten, Vorteile 
und Weiterbildungen des Verfahrens wird daher auf die obige Beschreibung verwiesen. 

Im Folgenden wird die Erfindung mit Hilfe der Figuren beispielhaft: erlautert. Es zeigt: 

Fig. 1 die Komponenten einer erfindungsgemafien Vorrichtung zur uberlagerten Darstel- 
lung zweier Abbildungen; 

Fig. 2 eine Veianschaulichung einer beispielhaften Distanzabbildung. 

Bei der in der Figur als stellvertretendes Beispiel dargestellten medizinischen Anwendung 
geht es darum, die Bewegung eines Katheters 2 bzw. genauer gesagt der Katheterspitze 
und/oder eines Fiihrungsdrahtes 8 im Gefafisystem 9 eines Patienten 1 zu beobachten. Zu 
diesem Zweck werden mit einer Rontgenapparatur 4 fluoroskopische Rontgenaufnahmen 
des untersuchten Korpervolumens erzeugt, welche als aktuelle Abbildungen A an eine Da- 
tenverarbeitungseinrichtung 5 iibermittelt werden. Problematisch an solchen fluoroskopi- 
schen Aufhahmen ist, dass sich das Gefafisystem 9 hierauf iiblicherweise nicht abzeichnet, 
so dass eine sichere Navigation des Katheters bzw. eines Flihrungsdrahtes zu einem be- 
stimmten Ort innerhalb des Gefafisystems hiermit kaum moglich ist. Eine bessere Dar- 
stellung des GefaSsystems konnte zwar durch die Injektion eines Kontrastmittels erreicht 
werden. Aufgrund der damit verbundenen Belastung fur den Patienten mussen solche 
Mafinahmen jedoch moglichst sparsam eingesetzt werden. 

Zur Verbesserung der Katheternavigation werden bei dem dargestellten System vor oder 
wahrend der eigentlichen Katheteruntersuchung mit der Rontgpnvorrichtimg 4 mehrere 
Angiogramme B angefertigt und in einem Speicher 6 der Datenverarbeitungseinrichtung 5 
gespeichert. Die Angiogramme konnen z.B. durch Kontrastmittelinjektionen so erzeugt 
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werden, dass auf ihnen der Gefafibaum des Patienten gut zu sehen ist. Sie werden daher im 
Folgenden auch als " Kartenabbildungen" oder "Gefafikarten" (roadmaps) bezeichnet. 

Da der Herzschlag erhebliche Auswirkungen auf die Lage und Form des Gefafisystems des 
5 Herzens und der angrenzenden Org^tie hat, sind im Speicher Kartenabbildungen B aus 
verschiedenen Phasen des Herzzyklus des Patienten 1 hinterlegt. Die zu einer jeweiligen 
Kartenabbildung B gehorige Herzphase wird dabei durch ein Elektrokardiogramm indi- 
ziert, welches von einem Elektrokardiografen 3 parallel zu den Rontgqnbildern aufgezeich- 
net wird. Des Weiteren konnen Kartenabbildungen auch zu verschiedenen Phasen des 

1 0 Atmungpzyklus angefertigt werden, welcher durch einen Atmungssensor wie beispielsweise 
einen Brustgurt oder dergleichen erfasst wird. Eine solche zusatzliche oder alternative Indi- 
zierung der Kartenabbildungen B iiber den Atmungszyklus ist aus Gninden der Ubersicht- 
lichkeit in der Figur nicht eigens dargestellt. Die Kartenabbildung B konnen ferner Tech- 
niken zur Bildverbesserung unterzogen werden, urn die Bildqualitat fur die Oberlagerung 

15 zu verbessern. 

Wahrend der zu therapeutischen oder diagnostischen Zwecken durchgefiihrten Katheter- 
untersuchung werden fortlaufend fluoroskopische Aufiiahmen A von der Katheterspitze 
bzw. einem Fuhrungsdraht 8 erzeugt und zusammen mit dem zugehdrigen EKG an die 
20 Datenverarbeitungseinrichtung 5 geleitet. Die zu einer aktuellen Axifhahme A gehorige 
Phase des Elektrokardiogramms bzw. des Herzzyklus wird dar n von der Datenverarbei- 
tungseinrichtung 5 ermittelt, und aus dem Speicher 6 wird die bestmoglich zu dieser 
Herzphase passende Kartenabbildung B ausgewahlt. 

25 Die aktuelle Abbildung A und die Kartenabbildung B konnen im Prinzip nebeneinander 
auf zwei verschiedenen Monitoren oder einander iiberlagert auf demselben Monitor darge- 
stellt werden. Da die Kartenabbildung B zur passenden Herzphase ausgewahlt wurde, be- 
stiinde dabei bereits eine vergleichsweise gute geometrische bzw. anatomische Oberein- 
stimmung zwischen den so (iberlagerten Abbildungen A, B. Dennoch zeigen sich in der 

30 Praxis durch Parallaxen bei der Abbildungserzeugung, durch die Bewegung von Weichtei- 
len und durch ahnliche Einflusse stets geringftigige Abweichungen zwischen den iiberla- 
gerten Gesamtabbildungen, welche durch Transformationen ohne Analyse des aktuellen 
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Bildinhaltes nicht behoben werden konnen. Diese Abweichungen konnen optisch sehr 
storend sein und den Nutzen der Oberlagerung erheblich mindern. 

Zur Verbesserung der Bildqualitat bei der Oberlagerung zweier Abbildungen wird ein auf 
5 der Position des abzubildenden Objektes, das heifit vorliegend des Katheters beziehungs- 
weise Fiihrungsdrahtes 8, basierendes Registrierungsverfahren vorgeschlagen. Im Rakmen 
dieses Verfahrens wird in den Kartenabbildungen B der Gefafibaum grob vorsegmentiert. 
Unter Segmentierung wird in der Bildverarbeitung die Zuordnung von Bildpunkten zu 
Objekten verstanden. 

10 

Das Registrierungsverfahren erfordert in diesem Zusammenhang die Auswahl eines geeig- 
neten Verfahrens zur Segmentierung und eines geeigneten Verfahrens zur Aufbereitung des 
Segmentierungsergebnisses, urn eine nachfolgende schnelle Registrierung mit Objekten im 
Gefafisystem zu unterstiitzen. Beide Auswahlen sollen im Hinblick auf einen schnellen und 

1 5 robusten Algorithmus zur Auffindung der bestmoglichen Obereinstimmung zwischen We- 
genetz und aktuellem Objekt erfolgen. Fur die Segmentierung von Blutgefafien ist die 
Hauptachsentransformation der lokalen Hesse-Matrix (Schrijver M: "Angiographic image 
analysis to assess the severity of coronary stenoses", Twente university press, Enschede, 
2002) geeignet. Da bei realen Rontgenaufhahmen des Gefafisystems in der Regel keine 

20 sichere Zuordnung eines Bildpunktes (Pixels) zu einem Gefafi moglich ist, erfolgt hier vor- 
zugsweise eine wahrscheinlichkeitsbasierte Segmentierung. Dabei wird jedem Bildpunkt ein 
Wert zugeordnet, der die Wahrscheinlichkeit dafiir beschreibt, dass der Bildpunkt zu einem 
Gefafi gehort. Eine multiplikative Distanztransformation mit einer hyperbolischen Maske, 
bei der Eintrage mit dem Kehrwert des Abstands zum Zentrum abnehmen, erlaubt simple 

25 Gradientenabstiegsoptimierungen auch fur komplexe Wegenetze wie Gefafibaume mit 

pathologischen Veranderungen. Eine solche Distanzabbildung D zeigt lokal an, in welcher 
Richtung bzw. Entfernung vom betrachteten Punkt aus gesehen eine grofiere 
Wahrscheinlichkeit fur das Vorliegen eines Gefafi es besteht. Die Distanzabbildung D kann 
durch ein Hohenrelief iiber einer Bildflache visualisiert werden, wobei die Hohe der Punkte 

30 des Reliefs die Entfernung zum Gefafisystem reprasentiert. Figur 2 zeigt diesbeziiglich die 
zweidimensionale Projektion der Hohenlinien eines beispielhaften Reliefs. Die Berechnung 
der wahrscheinlichkeitsbasierten Kartenabbildungen B und der zugehorigen 
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Distanzabbildungen D kann vorteilhafterweise offline bzw. vorab erfolgen, wobei die Er- 
gebnisse im Speicher 6 festgehalten werden. Wahrend einer Echtzeitanwendung wie z.B. 
des betrachteten medizinischen Eingriflfes belasten diese Berechnungen die Durcbfiihrung 
des Verfahrens somit nicht. 

5 

Nach Auswahl der am besten zur aktuellen Abbildung A passenden Kartenabbildung B aus 
dem Speicher 6 wird die zu dieser Kartenabbildung B gehorende Distanzabbildung D 
verwendet, urn die Lage des interessierenden Objektes 8 (Katheter oder Fiihrun^draht) auf 
der Kartenabbildung B abzuschatzen. Dazu wird zunachst das (rontgendichte) Objekt 8 

1 0 mit einem geeigneten Segmentierungsverfahren S in der aktuellen Abbildung A 

segmentiert. Dabei stehen verschiedene Algorithmen zur Verfugung, aus denen hinsichtlich 
der zugrunde liegenden Anwendung, der dargestellten Interventionseinrichtung sowie der 
Echtzeitfahigkeit eine optimale Variante ausgewahlt werden kann (Baert SAM, Niessen 
WJ, Meijering EHW, Frangi AF, Viergever MA: "Guide wire tracking during endovascular 

15 interventions", Proa 3rd MICCAI, 2000). 

Durch einen einfachen und schnellen Gradientenabstieg kann die Distanzabbildung D 
dann so verschoben werden, dass die Oberlappung zwischen der Lage des Objektes 8 und 
den Gefafibereichen maximal wird. Dabei konnen nur starre Verlagerungen (Verschiebun- 

20 gen und/oder Rotationen) des segmentierten Objektes relativ zur Kartenabbildung B zu- 
gelassen werden, es konnen jedoch auch nichtlineare Transformationen eingeschlossen 
werden, falls dies bei der speziellen Anwendung Vorteile hat. Die so erhaltene Transfor- 
mation © wird dann auf die Kartenabbildung B angewendet, und die transformierte Kar- 
tenabbildung ©(B) wird auf den Monitor 10 der aktuellen Abbildung A uberlagert darge- 

25 stellt. In der resultierenden kombinierten Abbildung C ist die Interventionseinrichtung 8 
fur den Arzt in einem kontrastreichen Gefefibaum gut sichtbar, wodurch die Navigation 
des Instrumentes und die Platzierung von Eingriffen erheblich erleichtert wird. 

Bei der kombinierten Darstellung auf dem Monitor 10 kann da ruber hinaus nur ein Aus- 
30 schnitt der Kartenabbildung B und/oder ein Ausschnitt der aktuellen Abbildung A im Be- 
reich des Objektes 8 verwendet werden, urn durch eine Begrenzung des Oberlagerung?- 
bereiches die Genauigkeit gegeniiber einer globalen Registrierung zu verbessern. 
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PATENTANSPROCHE 



1 . Vorrichtung zur kombinierten Darstellung von einer aktuellen Abbildung (A) eines 
Objekces (8), das sich in einem Wegenetz (9) befindet, und einer Kartenabbildung (B) des 
Wegenetzes (9), enthaltend eine Datenverarbeitungseinrichtung (5), welche dazu einge- 
richtet ist, 

5 a) in einer Kartenabbildung (B) das Wegenetz durch eine Segmentierung zu erkennen; 
b) aus dem Segmentierungsergebnis Hilfsinformationen (D) zu berechnen und im 

Speicher der Datenverarbeitungseinrichtung abzulegen, aus denen zu jeder in Frage 
kommenden Lage eines Objektes im Bild eine Transformation (Q), die Objekt und 
Wegenetz in Obereinstimmung bringt, in Echtzeit bestimmt werden kann; 
10 c) aus der aktuellen Abbildung (A) ein relevantes Objekt (8), das sich im Wege- 
netz (9) befindet, zu segmentieren; 
d) mit den HUfsinformationen (D) Transformationen (Q) der Kartenabbildung (B) 
und der aktuellen Abbildung (A) zu ermitteln, so dass bei Oberlagerung der trans- 
formierten Kartenabbildung (Q(B)) mit der transformierten aktuellen Abbil- 
15 dung (A) das Bild des Objektes (8) im Wegenetz der transformierten Kartenabbil- 

dung zu liegen kommt. 

2. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass die Hilfsinformationen 
eine Distanzabbildung (D) in Bezug auf das Wegenetz (9) umfassen, welche aus der jewei- 

20 ligen Kartenabbildung (B) durch eine Distanztransformation (D) gewonnen wird. 

3. Vorrichtung nach Anspruch 2, dadurch gekennzeichnet, dass die Datenverarbeitungs- 
einrichtung (5) dazu eingerichtet ist, 

cl) die Lage des Bildes des Objektes (8) in der aktuellen Abbildung (A) zu ermitteln; 



- 14- 



PHDE030376 EPP 



dl) zu der hierzu korrespondierenden Lage in der Distanzabbildung (D) eine kurzeste, 

in das Wegenetz (9) fuhrende Verschiebung zu ermitteln; 
d2) eine Transformation (0) der Kartenabbildung (B) und/oder der aktuellen Abbil- 

dung (A) zu bestimmen, welche die ermittelte Verschiebung umfasst. 

5 

4. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass die ermittelten Transfer- 
mationen (©) eine Translation, eine Rotation und/oder eine Skalierung umfassen. 

5. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass die Datenverarbeitungs- 
10 einrichtung (5) dazu eingerichtet ist, bei der Segmentierung des Wegenetzes (9) in der 

Kartenabbildung (B) jedem Bildpunkt eine Wahrscheinlichkeit dafur, dass er zum Wege- 
netz (9) gehort, zuzuordnen. 

6. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass sie eine bildgebende Ein- 
15 richtung, insbesondere eine Rontgenapparatur (4) und/oder ein MRI-Gerat, zur Aufhahme 

der aktuellen Abbildung (A) und gegebenenfalls der Kartenabbildung (B) aufweist. 

7- Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass sie einen Speicher (6) zur 
Speicherung einer Anzahl von Kartenabbildungen (B) aufweist, welche gemafi einem vari- 
20 ierenden Zustand des Wegenetzes (9) klassifiziert sincL 

8. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass sie eine Sensoreinrich- 
tung (3) zur Erfassung mindestens eines Parameters aufweist, welcher einen variierenden 
Zustand des Wegenetzes (9) beschreibt, vorzugsweise zur Erfassung eines Elektrokardio- 
25 gramms und/oder des Atmungszyklus. 

9- Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, dass die Datenverarbeitungs- 
einrichtung (5) dazu eingerichtet ist, aus dem Speicher (6) eine Kartenabbildung (B) aus- 
zuwahlen, deren zugehoriger Zustand des Wegenetzes (9) bestmoglich zum Zustand des 
30 Wegenetzes (9) wahrend der aktuellen Abbildung (A) passt. 
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10. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass sie eine Anzeigevorrich- 
tung (10) enthalt und die Datenverarbeitungseinrichtung (5) dazu eingerichtet ist, auf der 
Anzeigevorrichtung (10) die transformierte Kartenabbildung (©(B)) ganz oder aus- 

5 schnittsweise der transformierten aktuellen Abbildung oder einem Ausschnitt hiervon 
iiberlagert darzustellen. 

11. Verfahren zur kombinierten Darstellung einer aktuellen Abbildung (A) eines Objek- 
tes (8), das sich in einem Wegenetz (9) befindet, und einer Kartenabbildung (B) des We- 

10 genetzes (9), umfessend die folgenden Schritte: 

a) Segmentierung des Wegenetzes in der Kartenabbildung; 

b) Berechnung und Speicherung von Hilfsinformationen aus dem Segmentierungser- 
gebnis, wobei aus den Hilfsinformationen zu jeder in Frage kommenden Lage eines 
Objektes im Bild eine Transformation, die Objekt und Wegenetz in tTbereinstim- 

1 5 mung bringt, in Echtzeit bestimmt werden kann; 

c) Segmentierung eines relevanten Objektes, das sich im Wegenetz befindet, aus der 
aktuellen Abbildung; 

d) Ermittlung von Transformationen der Kartenabbildung und der aktuellen Abbil- 
dung unter Verwendung der Hilfsinformationen, so dass bei Oberlagerung der 

20 transformierten Kartenabbildung mit der transformierten aktuellen Abbildung das 

Bild des Objektes im Wegenetz der transformierten Kartenabbildung zu liegen 
kommt. 
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Vorrichtung und Verfahren zur kombinierten Darstellung von Angiogrammen und aktu- 
ellen Rontgenaufnahmen 

Die Eifindung betrifft eine Vorrichtung und ein Verfahren zur uberlagerten Darstellung 
5 einer aktuellen (R6ntgen-)Abbildung (A) eines Objektes (8) wie beispielsweise eines Ka- 
theters und einer Kartenabbildung (B) des Gefafisystems. Dabei werden zu in einem Spei- 
cher (6) hinterlegten Kartenabbildungen (B) mittels einer Distanztransformation (A) die 
zugehorigen Distanzabbildungen (D) berechnet. In den aktuellen Abbildung (A) wird das 
Objekt (8) segmentiert (2). Mit Hilfe der Distanzabbildung (D) wird dann eine Trans- 
10 formation der Kartenabbildung (B) berechnet, so dass bei Oberlagerung der aktuellen Ab- 
bildung (A) und der trans fbrmierten Kartenabbildung (©(B)) auf einem Monitor (10) das 
Bild des Objektes (8) im Wegenetz der transformierten Kartenabbildung liegt. 

Figur 1 
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